查看原文
其他

活动报名| 理想汽车大数据平台:从 Hadoop 到云原生架构改造实践

meet up Juicedata 2023-02-28

本周六,新一期的 Meetup 又来了

HDFS 作为 Hadoop 技术栈的底层存储系统,伴随着 Hadoop 技术栈的演进,一直是企业自建大数据存储的首选系统。但随着企业数据量的指数级增长,云计算时代的到来,企业对存储的弹性、运维及 TCO 都提出了更高要求。HDFS 难以继续满足企业的存储需求,云原生架构下企业如何对大数据平台进行改造?

在这次的会议中,我们邀请到理想汽车的大数据团队架构师聂磊为大家分享理想汽车数据平台从Hadoop 到云原生架构的改造实践。

同时,Juicedata 合伙人苏锐,将带来过去两年观察到的行业变化,和大家聊聊云原生架构中的重要一环,存储与计算分离的各类方案的优劣和适用场景。


理想汽车成立于2015年,大数据团队于2018年成立,平台最初主要以 Hadoop 技术栈来搭建;2020 年开始,理想汽车业务发展持续向好,数据平台管理的车辆数据增长极快,这对数据平台的敏捷性和弹性都提出了更高的要求。但由于 Hadoop 是存储和计算耦合的设计,增加存储空间的同时也需要增加计算资源。于是,理想汽车数据平台开始着手进行改造。


在这次的分享中,你将了解 :  

  • 理想汽车大数据平台存算分离改造实践与探索

  • 在替换HDFS 过程中,JuiceFS 在理想汽车有哪些更为深入的应用? 

  • 数据平台进行存算分离改造时,有哪些可选方案,孰优孰劣?企业应该如何选择? 

哪些企业建议参加此次会议?

  • 正在云上构建数据平台的企业;

  • 调研如何在混合云中构建数据平台的企业;

  • 调研在 IDC 中如何实现大数据平台存储与计算分离架构的企业;

时间

2022 年7月 23日(本周六)下午 14:00-15:30

活动议程

14:00-14:05 

社区动态

14:05-14:35 

Topic 1:理想汽车大数据云原生的演进与思考

聂磊,理想汽车大数据架构师,从事大数据工作 10 年,架构工作 6 年,对主流大数据技术有深入的理解;目前主要在推进大数据云原生和湖仓一体技术方案在理想汽车的落地。


演讲概要:

  • 大数据技术的发展和现状; 

  • 大数据云原生的好处与难点; 

  • JuiceFS 在理想汽车大数据云原生方案落地的探索。

14:40-15:10

Topic 2:大数据平台存算分离的选择与方案

苏锐,Juicedata 合伙人,作为 1 号成员参与创建 JuiceFS,一直深度参与在开源社区中支持开发者使用 JuiceFS。


演讲概要:

  • Hadoop 存储计算耦合架构的设计原因与挑战

  • 为什么要做存储计算分离,需要什么基础条件? 

  • 存储计算分离架构的几种方案比较

15:10-15:20 现场问答 & 抽奖


扫描进群
会议链接将在活动前发出 
现在就报名,让我们Meet UP。
特别注意:本次会议没有录播



用户案例



AI for Science-深势科技     AI-云知声    
理想汽车    知乎    在线设计平台:稿定科技  
大搜车    环球易购   趣头条    Shopee



最佳实践



元数据备份性能提升40倍   CSI Driver    
性能分析和调优   HDFS数据迁移  
跨云数据搬迁    ClickHouse架构探索  
MySQL备份验证性提升10倍



关于JuicedataJuicedata,杭州果汁数据科技有限公司是一家企业级存储服务供应商,开发了云原生分布式文件系统 JuiceFS,致力于在大数据时代下,为客户打造安全、高性能、自主可控的存储基础设施及服务。
2021年,JuiceFS 正式在GitHub上开源,已经获得5.6K star,欢迎开发者加入我们。 (github.com/juicedata/juicefs)


点击下方“阅读原文”访问官网


您可能也对以下帖子感兴趣

文章有问题?点此查看未经处理的缓存